首页
下载应用
提交文章
关于我们
问卷:你怎么看自由微信?
🔥 热搜 🔥
1
上海
2
习近平
3
新疆
4
鄂州父女瓜
5
乌鲁木齐
6
疫情
7
H工口小学生赛高
8
习明泽
9
芊川一笑图包
10
印尼排华
分类
社会
娱乐
国际
人权
科技
经济
其它
首页
下载应用
提交文章
关于我们
问卷:你怎么看自由微信?
🔥
热搜
🔥
1
上海
2
习近平
3
新疆
4
鄂州父女瓜
5
乌鲁木齐
6
疫情
7
H工口小学生赛高
8
习明泽
9
芊川一笑图包
10
印尼排华
分类
社会
娱乐
国际
人权
科技
经济
其它
一把短刀,怎么就让他连捅18人?!
向杨大市长道歉
向不容妄议的杨市长道歉
以色列搞大了:伊朗说要直接出兵参战
黄晓菁,这位杭州泰隆银行女员工自爆视频火了,带给我们那些思考?
生成图片,分享到微信朋友圈
查看原文
其他
让虚拟人开口说话,Stable Diffusion如何使用输入的视频生成动画?
Original
穿行者2049
今说新语
2024-04-14
前言
本文为付费文章,是个人耗费大量时间的经验总结,价格和免费的也没啥差别。但我认为付费阅读的用户都是有实际需要的,也许不忍心浪费投入,就会认真学习实际操作。免费阅读用户更容易放入收藏夹稍后待读,然后就吃灰了。所以欢迎大家付费阅读,有问题可以留言一起讨论学习。
前面曾经有一篇文章介绍SD的动画功能《
开源后新功能:使用Stable Diffusion进行动画创作!
》,当时SD还只有两种动画生成方式,但现在已经有四种动画生成方式了。分别是2D、3D、Video Input、Interpolation,前两种好理解,Interpolation是插值动画,也就是在两个关键帧之间AI自动生成过渡帧,例如从一个人像过渡到另一个人像。Video Input是指输入一段视频,然后生成指定prompt的动画,例如输入一段人说话的视频,再用你自己prompt绘制的人脸生成与此视频一致的动态结果。这篇文章就介绍一下在SD中如何使用Video Input。
需要说明的是,目前还有好几种生成动画的技术,单独面部动画还有更快捷的生成方式,但使用初始化视频生成动画可以完成全身以及更复杂内容的动画。比如狂奔的机器马,油画风格的电影场景等等,适用范围非常广,大家可以多研究探索一下。
首先看一下我使用Video Input生成的两个动画,帧数较少的动画流畅度就低,因此效果仅作示范。
目前很多开发者发布的Colab都具有动画功能,但功能最全的可能是Deforum Stable Diffusion Colab,我就介绍一下这个Colab的详细设置。会使用这个Colab的朋友就不用看了,避免付款后觉得花冤枉钱。
继续滑动看下一个
轻触阅读原文
今说新语
向上滑动看下一个
您可能也对以下帖子感兴趣
{{{title}}}
文章有问题?点此查看未经处理的缓存